東京工業大学 渡辺研究室
http://www.vision.ict.e.titech.ac.jp/members/watanabe/watanabe_01.jpg
助教時代のインタビュー
研究室のホームページ
研究内容
https://youtu.be/QDppJ9NWtaE
これまで、秒間1000回の速度で映像を切り替えるモノクロプロジェクタを開発し,同じ速度で駆動するセンシング系と連携させ,変形・運動するフィジカルな物体にデジタルなアピアランスを融合させる試みを実現してきた。このチャレンジを次のレベルにアップグレードさせるために,新たに947fpsで8bitのカラー映像を切り替えることができる新型の高速プロジェクタ DynaFlash v2 (3-LED+1-DMD)を実現しました.さらに,10台のカメラを駆使し,高速かつ広範囲で非剛体変形を3次元で認識可能な新しいトラッキングシステムを開発しました.
https://youtu.be/IUaql_bc0L8
1台の高速カメラによってマーカレスで顔の表情を認識し,その位置と変形に応じた映像を生成し, 高速プロジェクタ DynaFlashによって投影する.頭を動かす,しゃべる,笑う,これらの普段と変わりない動きに追従して,顔の表面を完全に変質させることができる.顔を自在に切り替えることもできる.
高速プロジェクタを用いた変形する非剛体曲面へのダイナミックプロジェクションマッピング
https://youtu.be/-bh1MHuA5jU